Image Oscillation +Heart Beat

https://youtu.be/wSCmsk8f8dc

Image Oscillation + - Heart Beat -

------------------------

☈ 2024.6 HEART Beat Session (à Pearl Mansion / 代々木上原)

主催：@one____two____three____

------------------------

☈ TL;DR ☈

心拍数をテーマにした本イベントで展示したものは主に二つで、

（心拍数＝会場全体のBPMも表示）

https://gyazo.com/fa6c8007ad1271dce71416b3bb0051a7

心拍と同期したアナログオシロスコープ

☈ 概要

ひとつの肝として、

プロジェクションで映される映像と

アナログオシロスコープに表示される映像は、

コントローラ（PS4コントローラ / MIDIコントローラ）で操作が可能であり、会場のDJと組み合わさることで、インスタレーションとも、ある種の簡易的なVJシステムともいえるようなものになっていますが、

内部的な処理としては

プロジェクションの方は映像信号

アナログオシロスコープの方は音声信号

をソフトウェア的に変位させています

（アナログオシロスコープは音声信号を変位させることで結果として映像になる仕組みで、それはあくまでも会場のDJの音声とは別であり、純粋に内部的な音声信号です）

https://gyazo.com/672dd96739531aa3d7224e0cf0ee2c94

トークイベントの最中にも心拍計をつけてもらい、彼の感情の変化が会場の音に直接反響する

仕組みは単純だが、実際に行ってみると、自分の心臓の鼓動が自分の外から（音として）やってくる感覚が緊張感を高め、それがまた心臓にフィードバックしていく、不思議な自己＝他者感覚があった

☈ 仕組み

基本的に参加者に心拍センサー（アームバンド）をつけてもらい、計測された心拍数をBPMとして心臓音（ドクン）を低音として会場全体に流すようにし、

それと同期するようにプロジェクション映像 / オシロスコープの映像の心臓も動くようにしています。

https://gyazo.com/51b894aa310af824919646c01d5c4f1b

仕組みの構築は主にTouchDesignerを用いており、

Bluetoothの心拍センサーから得た情報をOSC通信でTouchDesignerに送り、それをもとにBPMとして処理し、音 / 映像の再生を同期管理しています。

心拍計からOSC通信するには

が必要です

基本的には以下の記事を参考にしてます

https://gyazo.com/23ff23795429acb0ca3ef121f282d9df

入力する必要があるのは右下の方にある

RemoteAddress

RemotePort

になります。

RemoteAddress の確認方法はネットワークに接続された状態で

ターミナルを開いて ipconfig と入力してでてきたIPv4 アドレスをそのまま入力します。

https://gyazo.com/f5d93d14a0e1e3ffd1281930c2d38cb7

RemotePortについては基本的には何でもいいと思います。

ここは適当に9000と入力しておきます。

TouchDesignerの方で OSC In CHOPのパラメータの

Local Address　→　ここに上記のRemote Addressをコピペ

Network Port　→　ここに上記のRemote Portをコピペ

https://gyazo.com/7bc6a4f269c3d79d95d177666b1145bf

するとパラメータがOSC通信にて受け取ることができます。

それで受け取ったBPMの情報をもとに心臓の音を再生するようにします。

https://gyazo.com/f8741b4cc4dd17819f9bf25d853f5a4c

osc in CHOPのNetwork PortおよびOSC HeartRateSenderのRemote Portの数値を変えれば複数のOSCを受け取ることができる（はず）

動作確認Version

Touch Designer 2023.11760

☈ 使用機材

・アナログオシロスコープ Tektronix 2225

・CooSpo HW807　心拍計アームバンド

・PS4コントローラ

・nanoKontrol2 (MIDIコントローラ）

☈ソフトウェア

・Touch Designer

（Tdにおける、オシロスコープシステムの基盤となったのはkamindustries氏のtd-scopeコンポーネントです）

☈ 制作

オシロスコープ / 心拍システム・映像 : @nagasena__

☈ イベント参加者

*全員は網羅できないので、あくまで本記録映像に見える人のみのクレジットになります。

(in order of appearance)

@ryotahirayama　（DJ）

@one____two____three____　（主催）

@lovediver69 （画家・パフォーマー）

@99oyasumiyu　（画家）

@utanhole　（画家・ライブペインティング）